eval_batch_size:13107200, generate_setting:original, learning_rate:0.001, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0609    recall@10 : 0.0989    recall@20 : 0.1564    recall@50 : 0.2641    mrr@5 : (0.0589+0j)    mrr@10 : (0.0665+0j)    mrr@20 : (0.0721+0j)    mrr@50 : (0.0763+0j)    ndcg@5 : (0.0484+0j)    ndcg@10 : (0.0606+0j)    ndcg@20 : (0.0764+0j)    ndcg@50 : (0.101+0j)    hit@5 : 0.1088    hit@10 : 0.1672    hit@20 : 0.2488    hit@50 : 0.3837    precision@5 : 0.0245    precision@10 : 0.02    precision@20 : 0.016    precision@50 : 0.0112
Test result:
recall@5 : 0.0622    recall@10 : 0.1029    recall@20 : 0.1575    recall@50 : 0.2619    mrr@5 : (0.0621+0j)    mrr@10 : (0.0701+0j)    mrr@20 : (0.0754+0j)    mrr@50 : (0.0796+0j)    ndcg@5 : (0.0508+0j)    ndcg@10 : (0.0638+0j)    ndcg@20 : (0.0787+0j)    ndcg@50 : (0.1025+0j)    hit@5 : 0.1101    hit@10 : 0.1708    hit@20 : 0.2485    hit@50 : 0.3827    precision@5 : 0.0252    precision@10 : 0.0211    precision@20 : 0.0165    precision@50 : 0.0113

eval_batch_size:13107200, generate_setting:original, learning_rate:0.001, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0667    recall@10 : 0.107    recall@20 : 0.1654    recall@50 : 0.2732    mrr@5 : (0.0619+0j)    mrr@10 : (0.0698+0j)    mrr@20 : (0.0753+0j)    mrr@50 : (0.0797+0j)    ndcg@5 : (0.0519+0j)    ndcg@10 : (0.065+0j)    ndcg@20 : (0.0811+0j)    ndcg@50 : (0.1057+0j)    hit@5 : 0.1133    hit@10 : 0.1741    hit@20 : 0.2543    hit@50 : 0.3911    precision@5 : 0.0251    precision@10 : 0.0204    precision@20 : 0.0162    precision@50 : 0.0112
Test result:
recall@5 : 0.0663    recall@10 : 0.1066    recall@20 : 0.1636    recall@50 : 0.2732    mrr@5 : (0.0641+0j)    mrr@10 : (0.0721+0j)    mrr@20 : (0.0777+0j)    mrr@50 : (0.0822+0j)    ndcg@5 : (0.0537+0j)    ndcg@10 : (0.0666+0j)    ndcg@20 : (0.0821+0j)    ndcg@50 : (0.107+0j)    hit@5 : 0.1133    hit@10 : 0.174    hit@20 : 0.2561    hit@50 : 0.3961    precision@5 : 0.026    precision@10 : 0.0212    precision@20 : 0.0166    precision@50 : 0.0115

eval_batch_size:13107200, generate_setting:original, learning_rate:0.0005, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0552    recall@10 : 0.09    recall@20 : 0.1428    recall@50 : 0.2467    mrr@5 : (0.0522+0j)    mrr@10 : (0.0592+0j)    mrr@20 : (0.0645+0j)    mrr@50 : (0.0688+0j)    ndcg@5 : (0.0432+0j)    ndcg@10 : (0.0545+0j)    ndcg@20 : (0.0692+0j)    ndcg@50 : (0.0928+0j)    hit@5 : 0.0962    hit@10 : 0.15    hit@20 : 0.2276    hit@50 : 0.3611    precision@5 : 0.0211    precision@10 : 0.0174    precision@20 : 0.0142    precision@50 : 0.0101
Test result:
recall@5 : 0.0567    recall@10 : 0.0924    recall@20 : 0.1405    recall@50 : 0.243    mrr@5 : (0.0549+0j)    mrr@10 : (0.062+0j)    mrr@20 : (0.0669+0j)    mrr@50 : (0.0711+0j)    ndcg@5 : (0.0454+0j)    ndcg@10 : (0.0566+0j)    ndcg@20 : (0.0699+0j)    ndcg@50 : (0.0932+0j)    hit@5 : 0.1001    hit@10 : 0.1539    hit@20 : 0.2258    hit@50 : 0.3603    precision@5 : 0.0229    precision@10 : 0.0184    precision@20 : 0.0145    precision@50 : 0.0103

eval_batch_size:13107200, generate_setting:original, learning_rate:0.0005, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0531    recall@10 : 0.0859    recall@20 : 0.1376    recall@50 : 0.2405    mrr@5 : (0.0506+0j)    mrr@10 : (0.0575+0j)    mrr@20 : (0.0625+0j)    mrr@50 : (0.0667+0j)    ndcg@5 : (0.0415+0j)    ndcg@10 : (0.0523+0j)    ndcg@20 : (0.0664+0j)    ndcg@50 : (0.0898+0j)    hit@5 : 0.0951    hit@10 : 0.1485    hit@20 : 0.2215    hit@50 : 0.3553    precision@5 : 0.0209    precision@10 : 0.0174    precision@20 : 0.0139    precision@50 : 0.0101
Test result:
recall@5 : 0.0545    recall@10 : 0.0881    recall@20 : 0.1375    recall@50 : 0.2396    mrr@5 : (0.0534+0j)    mrr@10 : (0.0601+0j)    mrr@20 : (0.0651+0j)    mrr@50 : (0.0693+0j)    ndcg@5 : (0.0438+0j)    ndcg@10 : (0.0544+0j)    ndcg@20 : (0.0679+0j)    ndcg@50 : (0.0911+0j)    hit@5 : 0.0975    hit@10 : 0.1488    hit@20 : 0.221    hit@50 : 0.3578    precision@5 : 0.0221    precision@10 : 0.018    precision@20 : 0.0143    precision@50 : 0.0103

